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10 OTSPOSITIP PS REHABILITATION VISUELLB 

OTILISANT LB CANAL AVJDITIF 

Ob -jet de 1' invention - 

La pre"sente invention concerne un dispositif ar- 
tificiel de rehabilitation sensorielle de la vision, gSne- 
15 ralement appele" prothese visuelle qui est pa.ticulierement 
utile pour aider les personnes non voyantes en leur of- 
frant un moyen qui, utilisant le canal auditif, perroet la 
restitution de performances visuelles, et ce aussi bien 
pour la localisation spatiale que pour la reconnaissance 

20 de formes. 

Arriere-Plan fcechnologigne 

Les dispositifs appeles genSralement •prothises 
visuelles- peuvent se presenter essentiellement sous deux 
formes, a savoir des systemes de rehabilitation visuelle 
25 invasifs et des systemes- non invasifs. 

Les systemes invasifs, bien que theroriquement 
possibles, rencontrent encore actuellement trop d'inconvS- 
liients lors de leur implantation sur le canal visuel, et 
entratnent entre autres, des difficultes de compatibility 
30 biologigue. De plus, leurs performances restent encore 
tres insuff isantes 

Les systdmes de rehabilitation visuelle non in- 
vasifs, quant a eux, stimulent un organe perceptif intact, 
tel que 1* organe du toucher ou de 1* audition. 
35 Parmi les systemes non invasifs, on peut distin- 

guer ceux qui ont pour objectif de palier la d€ficience 
d'une seule fonction specif ique du systeme visuel lese" ou 
ceux qui permettent de palier simultanement la de*ficience 
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de olusieurs fonctions specifiques de la vision. La recon- 
naissance de formes et la localisation spatiale sont en 
fait les principales fonctions intervenant dans la percep- 
tion visuelle. 

5 on connaft de nombreux- dispositifs d'aide aux 

non voyants qui ont uniquement pour objectif d'eviter des 
obstacles en les localisant spatialement. L'fltfmnt le 
plus repandu est constitue* par une simple canne, mais dea 
systemes de tres grande complexity sont depuis quelque 

10 temps elabores. Parmi ceux-ci, la canne laser emet un 
rayon laser qui est lui-m€me r«flechi lorsqu'il rencontre 
un obstacle et la canne transmet alors un signal sonore ou 
vibratcire prevenant ainsi l'aveugle. 

Un autre dispositif permettant la localisation 

15 spatiale plus precise d'objets est constitue" par une pro- 
these ultrasonique telle que decrite dans le document US- 
A-3 366 922) qui consiste en une paire de lunettes equipee 
d'un dispositif d'echolocation et d'une paire de petits 
ecouteurs. La distance des obstacles est codee propoction- 

20 nellement a la hauteur du son et la direction des obsta- 
cles est codee par la balance d' intensity binaurale. Le 
dispositif a l'avantage de localiser plus precis tamat l'ob- 
stacle mais ne donne aucune information utilisable quant a 

sa forme et sa dimension. 
25 comme dispositif permettant uniquement la -recon- 

naissance de formes, on peut citer le dispositif commercia- 
lism sous le non. d'OPTACON d€crit dans le document US-A- 
3 229 387. Ce dispositif se compose d'une camera miniaturi- 
st, d'une partie Slectronique et d'un petit tableau 
30 d' aiguilles ou apparait en relief le dessin ou 1' ideo- 
grams lu par la camera. Ce dispositif permet a l'aveugle 
de lire par le toucher du doigt qu'il applique sur le ta- 
bleau d' aiguilles. 

D'autres dispositifs comme le Delta fonction- 
35 nent en principe selon le meme proce^de" mais traduisent di- 
rectement en ecriture Braille le signe (lettre ou chiffre) 

lu par la camera. 

Ces .dispositifs ne permettent bien entendu pas 
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la localisation spatiale„ 

Un seul dispositif permet d'allier dans une cer- 
taine mesure les deux processus de reconnaissance visuelle 
que constituent la localisation d'objets et la reconnais- 
5 sance de formes, condition indispensable & un reconnais- 
sance ou apprehension plus r€aliste en trois dimensions de 
l*environnement de I'aveugle. 

Ce dispositif qui pr€sente une certaine analo- 
gue avec le dispositif OPTACON prec^demment d€crit est 
10 connu sous le nom Smith-Kettlewel Portable Electrical simu- 
lation system (tvss) et est d€crit dans I'ouvrage Brain 
Mechanisms in Sensory Substitution Paul Bach-Y-Rita #- Acade- 
mic Press, New York and London, 1972, pp. 2 & 10. 

Dans ce systSme, les images capt€es par une ca- 
15 mera sont €chantillonnees et digitalisees en une matrice 
de 20 x 20 pixels et transf orm£es en un signal qui imprime 
1'image captee par la camera et pixellis€e sue la peau du 
dos ou du ventre de I'aveugle. 

Ce systems non invasif traite 1' information en 
20 temps r€el, de fapon $ permettre l v interaction avec J/envl- 
ronnement et d v appr£hender ainsi l v environnement en trois 
dimensions. 

Neanmoins, ce dispositif pr€sente des inconvtf- 
nients evidents d'inconfort. II reste lourd et fort encom- 

25 brant m§me sous sa forme portable, j- 

Tous les dispositif s qui viennent d'Stre dS- 
crits, necessitent une periode d' apprentissage longue, fas- 
tidieuse et souvent decourageante pour le non voyant. Get 
inconvenient nous semble dQ a une conception insuffisam- 

30 ment efficace de ces dispositif s. Dans le m€me systeme con- 
cern€ ici, dont la conception s f inspire davantage des pro- 
cessus naturels de traitement de l 1 information, l'appren- 
tissage sera optimise. 
Buts do I'inreeafcioa 

35 La presente invention vise 1 realiser une pro- 

th&se visuelle impliquant la reconnaissance de formes 
aussi bien que la localisation spatiale. Elle vise bien 
entendu & €viter les inconvenients des techniques de I 1 art 
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anterieur en fournissant un moyen simple et peu encombrant 
qui permet a l'aveugle de se former mentalement une image 

■ de son environment et/ou de reconnaltre des formes tel- 
les que des lettres ou des chiffres. 

5 D'autres buts et avantages de 1' invention} appa- 

rartront a la lecture de la description qui suit se t4£4- 
rant a une forme d'exScution particuliere et pre*fer6e de 
1* invention. 

™» g „ri P fcion glints ^r aefc gristict« e3 de 1« invention 

10 ""i L e dispositif de rehabilitation sensocielle de 

la vision de l'invention est caracteris€ en ce qu'il con- 
porte une camera vid€o, un dispositif eiectronique de trai- 
tement d'images qui traite ou transforme celles-ci en si- 
gnaux sonores codes et une paire d'ecouteurs pour transmet- 

15 tre lesdits signaux. . 

• Cette prothdse' de rehabilitation sensor ielle sti- 
mu ie done un canal sensoriel intact a savoir 1- audition et 
travaille en temps reel ce qui permet une apprehension 
fort complete du monde entourant l'aveugle. Selon une 
20 forme d« execution .prtffM* <3e l'invention, le dispositif 
est realise suivant la methode exposSe ci-dessous de »a- 
niere a optimaliser la duree d'apprentissage. 
sescriptioa des dessins 

Dans les figures annexeess 
25 - la figure 1 represente la grille d'Schantillonnag*. d'une 

image ; 

- la figure 2 represente un mode particulier de mise en 

forme de la grille de codage; 

- la figure 3 represente un schema bloc des different* ei£- 
30 m ents composant la prothese de rehabilita- 
tion visuelle. 

Le systeme de rehabilitation sensor ielle consti- 
tuant la prothese visuelle de l'invention comporte essen- 
tiellement une camera video, une partie eiectronique et 

35 une paire d'ecouteurs. . 

L« image captee en noir et blanc par la camera, 
de preference miniaturisee et portee par exemple sur des 
lunettes, sera d'abord transformee par echantillonnage et 
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digitalisation, de preference sous forme d'une matrice de 

8x8 pixels dont les 4 pixels du centre sont h nouveau 
divises en une matrice de 8 x 8 pixels, ce qui Off re, avan- 
tageusement une discrimination plus precise au centre de 
5 1' image. La figure 1 represente ces 124 pixels qui se com- 
posent done de 64 pixels dans la par tie centrale que I 1 on 
appelle les pixels de la fovSa par analogie avec I'anato- 
mie de la ratine et de 60 pixels appel€s de p£riph€rie. 

A ce stade, il est possible d'introduire Sven- 
10 tuellement un traitement de 1* image €chantillonn£e et digi- 
talisee tel que la recherche de contour. Des xnoyens -connus 
peuvent @tre utilises o cet effet, notamment des algorithm 
mes de traitement d' images. 

L 1 information visuelle €chantillonn€e et digita- 
ls Usee en 124 pixels est ensuite traduite suivant un codage 
auditif et est transmise au moyen des €couteurs & l'aveu- 
gle. Le codage auditif de l v information visuelle cons is te 
a associer & chaque pixel une onde sinusoldale sonore 
d'une frequence bien d€terrainee variant de 54 & 13.500 Hz 
20 environ soit comprise dans la plage de frequences audibles 
par 1'homme. 

D 1 autre part, l 1 amplitude de l'onde sonore de- 
pend du niveau de gris du pixel concerne. Le niveau 0 re- 
presente le noir complet et le blanc est repr€sent€ par le 

25 niveau maximum bien que la convention inverse soit 6gale-» 
roent envisageable, 

Ainsi, chaque pixel de 1' image €chantillonn€e en 
temps reel determine deux informations instantan€es, la 
frequence et !• amplitude de l'onde sonore. 

30 On effectue r egulierement la somme ponder ee par 

1* amplitude definie ci-dessus, de toutes les ondes sinusot- 
dales correspondant aux 124 pixels et on obtient la signa- 
ture auditive instantan€e de I s image que l'on peut alors 
transmettre par 1 •interm€diaire des €couteurs & I'aveugle* 

35 Remarquons que !• intensity du son ne varie pas 

de la mSiae mani&re en fonction du niveau de gris pour tous 
les pixels. En effet , on sait que les seuils audibles va- 
rient en fonction des frequences et que ce seuil 
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d'audibilite - est particulierement bas dans la zone de f r$- 
quences comprise entre 300 et 3000 Hz environ. II convient . 
done de corriger le niveau sonore pour une perception opti- 
male du signal en fonction d'une courbe de*f inissantj pour 
5 l'horame le seuil d'audibilite* en relation avec la fr£- 
guence. 

D' autre part, afin de faciliter la localisation 
spatiale, une balance d* intensity binaurale dans les Scou- 
teurs est prSvue de maniere a faciliter la localisation 
10 soit a gauche soit a droite de chacun des pixels d'une 
image vue par la camera par rapport a la direction .droit 
devant, pour la personne equipee du dispositif. 

L* image captee par la came*ra est trans formSe' en 
une image Schantillonnee et digitalisSe toutes les 20 ins 
15 e t elle est avantageusement traduite aprSs un codage audi- 
tif en un son compose, de preference 10 fois par second* 
au minimum, de maniire a permettre a l'aveugle d«appre"hen- 
der -1' image" auditive de facon coordonn€e par rapport a 
ses mouvements de la t£te ou du corps. 
20 D *un point de vue pratique, on peut done considS- 

rer dans ces conditions que l'on travaille en temps r€el. 

Un mode pacticulier de mise en forme de la 
grille de codage est represents dans la figure 2 annexee. 
cette mise en forme prSferee de la grille de codage a 6t6 
25 pre-vue afin de reduire avantageusement l'apprentissage de 
1« utilisation de la prothese auditive. 

La grille representee a la figure 2 est composee 
d'une matrice de 16 x 16 elements dont seuls les elements 
compris dans les zones entourees d'un trait gras sont re- 
30 pris dans la grille d' Schantillonnage de la figure 1. Au 
centre de la figure 2 on distingue les 8 x 8 pixels de la 
fovea ot dans chacun- des quatre coins les 15 pixels de Pe- 
ripherie correspondant a ceux de la grille d'echantillon- 

nage de la figure 1. 
35 A chacun des elements de la matrice 16 x 16 de 

la figure 2, correspond une onde sinusoidal dont la fre- 
quence est d«5terminee suivant une progression geome*trique 
entre 54 et 13.S00 Hz environ. 
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On repr€sente cette progression ge'ome'trique pars 

a + ag + aq2 + . . . + aq 11 " 1 

Dans la forme d' execution pre"fe"re*e de l'inven- 
tion, on choisit pour le dispositif concern^, lee valeurs 
5 du pararaStre a, de la raison g et de la constante N, comme 
suit: 

"a = 54 (ou toute autre valeur qu'on jugera preferable 
q - 2^/32 
23 - 256 

10 De cette manure, on attribue au pixel mnne'ro n 

(voir figure 2), la frequence* - 

n-1 

a . q n-l - 54.2 32 
Par consequent, le rapport des frequences de 2 
15 pixels superposes (comme 101 et 117 dans la figure 2 vau- 
dra'\f!?, alors que le rapport des frequences de 2 pixels 
sSpares d*une ligne et situes sur une meme verticale 
(comme 101 et 133 dans la figure 2) vaudra 2. 

Ainsi, le fait que les frequences doublent tou- 
20 tes les deux lignes permet de detecter ais€ment une verti- 
cale comme une double fomme d' harmoniques (analogue au tim- 
bre d*un instrument) tandis qu'un trait horizontal a condi- 
tion de couvrir plusieurs pixels est perpu comme Jjn sen 
2g subissant un ph€nomene' de battement. — 

On a' est apercu que cette facon de rSaliser la 
grille de codage permet un apprentissage relativement ra- 
pide en off rant la possibility de mieux reconnaitre la dif- 
ference entre les pixels de la fovea et les pixels de pe"ri- 
3Q phSrie. Bn effet, le systeme associe les ondes sonores les 
mieux percues c'est-a-dire plus audibles aux pixels de la 
fovea (frequences comprises entre 236 et 3100 Hz environ) 
tandis que les ond» t sonores plus graves pour les elements 
inf €rieurs, ou plus aigus pour les elements super ieurs, 
35 representent les pixels de peripheric. 

Enfin, grace S une balance d'intensite binau- 
rale, les images percues dans la partie gauche de la 
grille sont essentiellement percues dans l'Scouteur gauche 
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et les images perpues S droite de la grille sont perpues 
essentiellement dans l'^oouteur droit. II est bien Evident 
qu'il faut une oreille particulifcrement entraln€e pour 
faire la difference par exemple entre la frequence Jeorres- 
5 pondant au pixel 48 (h droite) et celle correspondant au 
pixel 49 (2 gauche) , qui lui est imm^diatement sup€rieure« 
La binaiiralite permet cependant sans difficult^ de distin- 
gue r ces deux signaux (voir figure 2). 

La figure 3 annexSe illustre un exemple pratique 
10 de prothese de rehabilitation visuelle. Une camera video 2 * 
est disposee par exemple sur la t^te du su jet, de jnanifere 
a lui permettre une exploration de son environnement vi- 
suel 1. 

L'image captee par cette camera 2 est transfor- 
15 mee en un signal vid€o aprSs Schantillonnage en 3 selon 
une grille (representee & la figure 1) et les diff^rents 
niveaux de gris correspondant & 1' image £chantillonn€e 
sont mis en memoire en 4. 

Ce signal peut subir un traitement d' image 5 qui 
20 consiste S limiter par exemple les effets de transitions 
brutales dans les variations de gris lors de la discretisa- 
tion, et qui est ensuite code en 6 en un son complexe par 
sommation ponderee des frequences sinusoldales .correspon- 
dant & chaque pixel. Une table 7 Stablit. cette corxespon- 
25 dance entre un pixel et le son qui lui est associ€.- Enfin 
les informations numeriques correspondant au son complexe 
sont synthetisees en 8 en signaux analogiques binauraus 
qui sont transmis a la paire d'€couteurs 9« 

30 
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REVENDICATIONS 

1. Dispositif de rehabilitation visuelle utili- 
sant le canal auditif caract£ris<? en ce qu'il comporte es- 
sentiellement une camera vidSo, un dispositif €lectronique 

5 de traitement d 1 image qui transforme 1* image capt£e par la 
camSra en un signal sonore, qui eat lui-m$me transmis dans 
de3 Scouteurs. 

2. Dispositif selon la revendication 1 caract€- 
rise en ce que 1* image captee par ladite camera est €chan- 

10 tillonn€e et digitalis£e et est ensuite cod€e en un signal 

sonore. - 
* .3. Dispositif selon la revendication 2 caracttf- 

ris€ en ce que 1* image est digitalisSe en une matrice de 8 
x 8 pixels et dont les quatre pixels du centre de l 1 image 

15 sont £ nouveau divises en une matrice de 8 x 8 pixels* 

4. Dispositif selon la revendication 3 caract£- 
risS en ce qu'il comporte un traitement d f image perraettant 
de rechercher un contour , de limiter les effets de transi- 
tions brutales ou de filtrer l f image. 

20 5. Dispositif selon I 1 une quelconque des revendi- 

cations 2 & 4 caracterisS en ce que le codage de l 1 image 
€chantillonn€e et digitalisSe consiste a associer & chaque 
pixel une frequence unique d'ondes sonores. 

6. Dispositif selon la revendication 5 ca£act€- 
25 risS en ce que les frequences des ondes sinusoSdales sono- 
res associSes & chaque pixel sont situ€es dans une plage 
allant de 54 h. 13.500 Ez environ, soit dans la zone d 1 audi- 
bility de 1'Stre humain. 

7. Dispositif selon I 1 une quelconque des revendi- 
30 cations 5 ou 6 caracteris€ en ce qtie 1' amplitude de l'onde 

sonore associ€e a chaque pixel varie en fonction du niveau 
de gris du pixel. 

8. Dispositif selon la revendication 7 caract€- 
ris€ en ce que l a amplitude de l'onde sonore est €talonn€e 

35 pour chaque frequence en fonction d'une cour.be qui d£finit 
la meilleure zone d 1 audibility en fonction de I 1 intensity 
du son chez l'hbmme. 

9. Dispositif selon I 1 une quelconque des 
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revindications S a 6 caracterise" en ce que le son transmie 
dans les ecouteurs est la somme pond^ree de toutee lea on- 
des sonores associees a chague pixel, appelee la signature 

auditive de 1' image. 
5 10. Dispositif seion la revendication 9 caracte"- ' 

rise" en ce que ladite signature auditive est transmise au 
minimum dix fois par seconde dans les ecouteurs. 

11. Dispositif selon l'une quelconque des reven- 
dications 5 a 10 caract€ris€ en ce que la lateralization- 

10 du pixel sur la matrice est traduite en un signal sonore 
au nrven d' une balance d'intensite" binaurale dans les_ecou- 
teurs. 

12. Dispositif selon l'une quelconque des reven- 
dications 3 a 11 caracterise" en ce que la grille de codage 

15 coiaprend une matrice de 16 x 16 Elements dont seuls les 8 
x 8 elements du centre et les 4 x 15 elements dans chacun 
des coins sont repris dans la grille d'echantillonnage. 

13. Dispositif selon la revendication 12 caractfi* 
rise* en ce qu'a chacun des 16 x 16 elements de la grille 

20 de codage on associe une onde sonore sinusoldale dont la 
frequence est d^terminee suivant une progression gtfomtftri- 
que de maniere a ce que la frequence double toutes les 

deux lignes. _ 

14 Dispositif selon la revendication 13 caracte- 

25 rise" en ce que la progression gSometrique des frequences 
correspondant aux pixels de 1' image ecnantillonnee est d€- 
finie par 



a + aq + aq2 + ... + aq N-1 



ou 
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a = 54 



q = 2^/32 
N » 256 
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